期刊
  出版年
  关键词
结果中检索 Open Search
Please wait a minute...
选择: 显示/隐藏图片
1. 基于时空注意力的空间关联三维形貌重建
盖彦辛, 闫涛, 张江峰, 郭小英, 陈斌
《计算机应用》唯一官方网站    2024, 44 (5): 1570-1578.   DOI: 10.11772/j.issn.1001-9081.2023050651
摘要61)   HTML1)    PDF (2607KB)(29)    收藏

聚焦形貌恢复通过对场景深度和散焦模糊之间的潜在关系进行建模实现三维形貌重建。但现有的三维形貌重建网络无法有效利用图像序列的时序关联进行表征学习,因此,提出一种基于多景深图像序列空间关联特征的深度网络框架——三维空间相关水平分析模型(3D SCHAM)进行三维形貌重建。该模型不仅可以精确捕获单帧图像中聚焦区域到离焦区域的边缘特征,而且可有效利用不同图像帧之间的空间依赖性特征。首先,通过构建深度、宽度和感受野复合扩展的网络构造三维形貌重建的时域连续模型,进而确定单点深度结果;其次,引入基于空间关联的注意力模块,充分学习帧与帧间的“邻接性”与“距离性”空间依赖关系;另外,利用残差反转瓶颈进行重采样,以保持跨尺度的语义丰富性。在DDFF 12-Scene真实场景数据集上的实验结果显示,相较于DfFintheWild模型,3D SCHAM在深度值准确度度量的3个阈值 1.25,1 . 25 2 , 1 . 25 3 上的精确度分别提升了15.34%、3.62%、0.86%,验证了该模型在真实场景的鲁棒性。

图表 | 参考文献 | 相关文章 | 多维度评价
2. 全局时空特征耦合的多景深三维形貌重建
张江峰, 闫涛, 陈斌, 钱宇华, 宋艳涛
《计算机应用》唯一官方网站    2023, 43 (3): 894-902.   DOI: 10.11772/j.issn.1001-9081.2022101589
摘要152)   HTML3)    PDF (2603KB)(56)    收藏

针对现有三维形貌重建模型无法有效融合全局时空信息的问题,设计深度聚焦体积(DFV)模块保留聚焦和离焦的过渡信息,并在此基础上提出全局时空特征耦合(GSTFC)模型提取多景深图像序列的局部与全局的时空特征信息。首先,在收缩路径中穿插3D-ConvNeXt模块和3D卷积层,捕捉多尺度局部时空特征,同时,在瓶颈模块中添加3D-SwinTransformer模块捕捉多景深图像序列局部时序特征的全局关联关系;然后,通过自适应参数层将局部时空特征和全局关联关系融合为全局时空特征,并输入扩张路径引导生成聚焦体积;最后,聚焦体积通过DFV提取序列权重信息,并保留聚焦与离焦的过渡信息,得到最终深度图。实验结果表明,GSTFC在FoD500数据集上的均方根误差(RMSE)相较于最先进的全聚焦深度网络(AiFDepthNet)下降了12.5%,并且比传统的鲁棒聚焦体积正则化的聚焦形貌恢复(RFVR-SFF)模型保留了更多的景深过渡关系。

图表 | 参考文献 | 相关文章 | 多维度评价
3. 全局时空特征耦合的多景深三维形貌重建
张江峰 闫涛 陈斌 钱宇华 宋艳涛
《计算机应用》唯一官方网站    DOI: 10.11772/j.issn.1001-9081.2022101589
录用日期: 2023-01-16